ESC: Emotional Self-Correction for Reliable Vision-Language Models
情感驱动自纠正:免训练提升视觉语言模型可靠性
🧭 情感信号触发VLM自纠正
University of Information Technology, Ho Chi Minh City · Carnegie Mellon University · Harvard University · Northwestern University · Mohamed bin Zayed University of Artificial Intelligence
发现情感信号可零训练激活VLM自我反思,提出外部验证+情感提示的免训练自纠框架ESC
📌 工作参考价值(4 点)
- 在对话推荐/商品问答中,当模型首次回复可能不可靠时,注入情感提示(如“再仔细想想,这个推荐似乎有问题”)触发自我纠正,提升解释质量。
- 无需微调,低成本增强多模态模型在商品图片理解、广告文案生成等场景的准确性,尤其适合资源受限的线上系统。
- 结合简单的验证器检测潜在错误响应,可作为Agent内部反思模块,在输出前自动触发二次推理,减少事实错误和幻觉。
- 情感作为控制信号的想法可迁移至用户交互设计,例如用户不满时自动触发模型重新生成更谨慎的回答,改善体验。